Desenvolvimento e Evidências de Validade do Inventário de Avaliação dos Cinco Grandes Fatores e Facetas de Personalidade (IACGF-F) / Development and Validity Evidence of the Big Five Factors and Facets Personality Assessment Inventory (PAIBFF-F)

A personalidade é um construto central na pesquisa psicológica, podendo ser definida como uma estrutura relativamente estável do ser humano que influencia seus comportamentos diante de acontecimentos diários. Este estudo objetivou desenvolver e obter evidências de validade baseadas na estrutura interna do Inventário de Avaliação dos Cinco Grandes Fatores e Facetas de Personalidade (IACGF-F). A Teoria dos Cinco Grandes Fatores de Personalidade foi utilizada como referencial teórico para elaboração dos itens. Para o estudo piloto, 150 sujeitos responderam à versão do instrumento composta por 151 itens e questionário sociodemográfico. O estudo final contou com 285 sujeitos com média de idade de 22,6 anos que responderam à versão do IACGF-F com 129 itens, além do questionário sociodemográfico. Foi realizado um conjunto de sete análises fatoriais exploratórias, estimação da fidedignidade, bem como calibração dos parâmetros dos itens a partir da TRI. A versão final do instrumento ficou composta por 103 itens distribuídos em cinco fatores com variação de cinco a seis facetas por fator. Foram encontrados bons índices de fidedignidade (alfas entre 0,85 e 0,96), além de bons índices de dificuldade e discriminação. Sugere-se a utilização do IACGF-F em pesquisas nas quais a avaliação mais detalhada das facetas se faz necessária.

Personality is a central construct in psychological research and can be defined as a relatively stable structure of human beings that influences their behavior in the face of daily events. The purpose of this study wasd to develop and obtain validity evidence based on the internal structure of the Inventory for Assessment of the Big Five Personality Factors and Facets (PAIBFF-F). The Big Five Personality Factor Theory was used as the theoretical framework for item development. For the pilot study, 150 subjects answered the initial version of the instrument, which consisted of 151 items and a sociodemographic questionnaire. The final study included 285 subjects with a mean age of 22.6 years who answered a version of the PAIBFF-F with 129 items and sociodemographic questionnaire. Seven exploratory factor analyses, reliability estimation, as well as calibration of the item parameters from TRI were performed. The final version of the instrument was composed of 103 items distributed in five factors with a variation of five to six facets per factor. Good reliability indices were found (alphas between 0.85 and 0.96), in addition to good difficulty and discrimination indices. We suggest the use of the IACGF-P in research in which a more detailed evaluation of the facets is required.

Cuestionario de conocimientos nutricionales aplicados en el deporte: Propuesta inicial de instrumento

El conocimiento nutricional es clave para la formación de hábitos alimentarios y en la modulación del comportamiento alimentario. La alimentación y nutrición son cruciales durante la adolescencia sobre todo en jóvenes deportistas. El objetivo de esta investigación fue analizar la validez teórica y los índices de discriminación y dificultad del cuestionario de conocimientos nutricionales aplicados en el deporte utilizando la teoría de respuesta al ítem en deportistas juveniles de 14 a 19 años. Este estudio instrumental se desarrolló en cinco fases: generación de ítems, revisión por panel de expertos, pilotaje, aplicación y depuración final. Participaron 261 adolescentes de 14 a 19 años e integrantes de disciplinas colectivas en selecciones Nacional y clubes profesionales. Se determinaron los índices de dificultad y de discriminación para cada uno de los ítems. Los ítems 1 (0,354) y 2 (0,285) del factor antes, 3 (0,315) y 6 (0,408) del factor durante, 7 (0,354) y 10 (0,408) del factor después, 3 (0,254) y 9 (0,231) del factor hidratación y, 2 (0,362) y 5 (0,323) del factor suplementación, fueron los que presentaron mayor grado de discriminación. El cuestionario de conocimientos nutricionales aplicados en el deporte está compuesto por 30 ítems divididos en cinco factores cada uno de ellos con seis ítems. La propuesta inicial del cuestionario es una herramienta valida teóricamente y con índices de dificultad y discriminación adecuados para evaluar el conocimiento nutricional en jóvenes deportistas. Su aplicación permite conocer potenciales brechas en conocimientos claves y diseñar estrategias educativas específicas para subsanarlas.

Nutritional knowledge plays a fundamental role in the formation of dietary habits and the modulation of eating behaviour. Nutrition and diet are crucial during adolescence, especially for young athletes. The purpose of this research was to analyse the theoretical validity and indices of discrimination and difficulty of the questionnaire on nutritional knowledge applied in sports using item response theory in youth athletes aged 14 to 19. This instrumental study was conducted in five phases: item generation, expert panel review, pilot testing, application, and final refinement. A total of 261 adolescents aged 14 to 19, who were members of national team and collective disciplines of professional clubs, participated. Difficulty and discrimination indices were determined for each item. Items 1 (0.354) and 2 (0.285) of the before factor, 3 (0.315) and 6 (0.408) of the during factor, 7 (0.354) and 10 (0.408) of the post factor, 3 (0.254) and 9 (0.231) of the hydration factor, and 2 (0.362) and 5 (0.323) of the supplementation factor showed the highest degree of discrimination. The questionnaire on nutritional knowledge applied in sports consists of 30 items divided into five factors, each with six items. The initial questionnaire proposal is a theoretically valid tool and with adequate difficulty and discrimination indices to evaluate nutritional knowledge in young athletes. Its application allows for identifying potential gaps in key knowledge and designing specific educational strategies to address them.

An application of cognitive diagnostic models in the evaluation of reading comprehension in Chilean university students

Introduction: Reading Comprehension skills are fundamental to the academic performance of university students. These abilities are not innate; therefore, systematic training is required before entering university. The main objective of this study was to evaluate the reading comprehension skills of Chilean University Students. Method: A sample of 579 students participated in the study, responding to four texts that comprise the Reading Comprehension Strategies for University Students (ELCU). An automated platform was used to apply and correct the test with immediate results and feedback. The tool allowed the use of a broad and representative sample of the various regions of Chile. The ELCU was developed using a cognitive diagnostic assessment (CDA) considering cognitive, metacognitive and linguistic strategies. The ana-lyses were performed using two different approaches: The Linear Logistic Test Model (LLTM) and the deterministic inputs, noisy "and" gate (DINA) model. Results: The rejection of the LLTM implies that the strategies do not differ in cognitive complexity (difficulty) while the adequate goodness of fit to the DINA model allows to characterise the students according to their reading abilities. Conclusion: The ELCU test provides reliable and valid information on the reading comprehension ability and metacognitive awareness of university students.

Introducción: Las habilidades de comprensión lectora son fundamentales para el rendimiento académico de los estudiantes universitarios. Estas habilidades no son innatas; por tanto, se requiere una formación sistemática antes de ingresar a la universidad. El objetivo principal de este artículo fue evaluar las habilidades de comprensión lectora de estudiantes universitarios chilenos. Método: En el estudio participó una muestra de 579 estudiantes que respondieron cuatro textos que componen las Estrategias de Comprensión Lectora para Estudiantes Universitarios (ELCU). Se utilizó una plataforma automatizada para aplicar y corregir la prueba con resultados y retroalimentación inmediatos. La herramienta permitió utilizar una muestra amplia y representativa de las distintas regiones de Chile. ELCU fue desarrollado mediante evaluación diagnóstica cognitiva (CDA) considerando estrategias cognitivas, metacognitivas y lingüísticas. Los análisis se realizaron mediante dos aproximaciones diferentes: The Linear Logistic Test Model (LLTM) y the Deterministic Inputs, Noisy "and" Gate (DINA) model. Resultados: El rechazo al modelo LLTM implica que las estrategias no difieren en complejidad cognitiva mientras que la adecuada bondad de ajuste al modelo DINA permiten caracterizar a los estudiantes según sus habilidades lectoras. Conclusión: La prueba ELCU permite obtener información confiable y válida sobre la capacidad de comprensión lectora y la conciencia metacognitiva de los estudiantes universitarios.

European health literacy survey questionnaire short form (HLS-Q12): adaptation and evidence of validity for the Brazilian context

Abstract Health literacy (HL) refers to knowledge, motivation and skills to understand, evaluate and apply health information, enabling appropriate decision making in daily life on health care and health promotion. Studies show that HL is associated with several social determinants, health outcomes, and health promotion. In Brazil, studies on the thematic are still scarce. Thus, the present study aimed to adapt, seek evidence of validity, reliability and estimate the parameters of the items of the European Health Literacy Survey Questionnaire Short Form (HLS-Q12) for the Brazilian context. 770 individuals participated, recruited through advertisements in the media and social networks, 82.1% female, aged between 18 and 83 (M = 35.5, SD = 13.52), from 21 Federative Units of Brazil and the Federal District. The subjects answered the HLS-Q12 and a sociodemographic questionnaire. Exploratory factor analysis indicated a unifactorial structure with good psychometric characteristics (GFI = 0.98; CFI = 0.98; RMSEA = 0.08; RMSR = 0.07). Cronbach's alpha, Guttman's lambda 2 and McDonald's omega reliability indicators were equal to 0.87. We conclude that the HLS-Q12 is an adequate instrument to assess the level of HL in the Brazilian population.

Cuestionario de Gratitud-20 (G-20): evidências psicométricas e parâmetros de seus itens no Brasil / Gratitude Questionnaire-20 (G-20): psychometric evidences and parameters of their items in Brazil / Cuestionario de Gratitud-20 (G-20): evidencias psicométricas y parámetros de sus ítems en Brasil

Objetivou-se explorar os parâmetros psicométricos do Cuestionario de Gratitud por meio da Teoria de Resposta ao Item (TRI), utilizando o Modelo de Resposta Graduada. Para tanto, participaram 533 respondentes (M idade = 29,9), a maioria mulheres (67,7%). Inicialmente, checou-se a dimensionalidade da escala, que apoiou uma estrutura quadrifatorial (CFI = 0,99; TLI = 0,99). Os parâmetros dos itens foram realizados separadamente para cada fator, e os resultados indicaram que todos os itens discriminam adequadamente os participantes. Os itens do fator Reconhecimento de Dons exigiram uma maior quantidade de theta para serem completamente endossados e o fator Gratidão Interpessoal demandou menor quantidade de theta para ser a opção de reposta, talvez por ser melhor aceito socialmente. Estima-se que os objetivos do estudo foram alcançados, conhecendo evidências psicométricas de uma medida que avalia a gratidão numa perspectiva mais integradora, recomendando-se o seu uso em possibilidades futuras. (AU)

The aim of this study was to explore the psychometric parameters of the Gratitude Questionnaire through the Item Response Theory (IRT), using the Graduated Response Model. Therefore, 533 respondents participated (Mage = 29.9), mostly women (67.7%). At the beginning, we checked the dimensionality of the scale, which supported a quadratic structure (CFI = 0.99; TLI = 0.99). The parameters of the items were performed separately for each factor, and the results indicated that all items adequately discriminate participants. The items of the Gift Recognition factor required a greater amount of theta to be fully endorsed and the Interpersonal Gratitude factor required less amount of theta to be the answer option, perhaps because it is better accepted socially. It is estimated that the objectives of the study were reached, knowing psychometric evidence of a measure that evaluates gratitude in a more inclusive perspective, recommending its use in future possibilities. (AU)

Se objetivó conocer los parámetros psicométricos del Cuestionario de Gratitud por medio de la Teoría de Respuesta al Item (TRI), utilizando el Modelo de Respuesta Graduada. Participaron 533 sujetos (M edad = 29,9), la mayoría mujeres (67,7%). Inicialmente, se verificó las dimensiones de la escala, que apoyó una estructura cuadrifatorial (CFI = 0,99; TLI = 0,99). Los parámetros de los ítems fueron realizados separadamente para cada factor, y los resultados indicaron que los ítems discriminan adecuadamente a los participantes. Los elementos del factor Reconocimiento de Dons requirieron una mayor cantidad de theta para ser completamente endosados y el factor Gratitud Interpersonal demandó menor cantidad de theta para ser la opción de respuesta, tal vez por ser mejor aceptado socialmente. Se estima que los objetivos del estudio se alcanzaron, conociendo evidencias psicométricas de una medida que evalúa la gratitud en una perspectiva más integradora, recomendándose su uso en posibilidades futuras. (AU)

Burnout Syndrome Assessment Scale in Public Safety: Psychometric Parameters / Escala de Avaliação da Síndrome de Burnout na Segurança Pública: Parâmetros Psicométricos

ABSTRACT The burnout variable has been studied in different professions; however, it presents challenges in its measurement. The present study provides evidence of validity based on the internal structure of the Burnout Syndrome Assessment Scale in Public Security Workers (EASB-SP) and presents the estimation of item parameters through the Item Response Theory (IRT). A total of 10,885 public security agents from all states of Brazil participated in the study. The analyses indicated a three-factor structure, with adequate reliability indices and discrimination of the items. The Professional Fulfillment factor presented a lower theta value to be endorsed. The instrument was shown to be an adequate measure, with evidence of validity for the context of Brazilian public security.

RESUMO O Burnout tem sido uma variável estudada em diferentes profissões, embora com desafios em sua medida. O presente estudo apresenta evidências de validade baseada na estrutura interna da Escala de Avaliação da Síndrome de Burnout (EASB-SP) para a segurança pública, além de apresentar a estimativa dos parâmetros dos itens por meio da Teoria de Resposta ao Item (TRI). Participaram do estudo 10.885 agentes da segurança pública de todas as unidades federativas do Brasil. As análises indicaram uma estrutura tri-fatorial, com índices de fidedignidade e discriminação dos itens adequados. O fator de realização profissional indicou menor theta para ser endossado. O instrumento em questão apresenta-se como uma medida adequada e com evidências de validade para o contexto de segurança pública brasileira.

Avaliação psicológica e avaliação da aprendizagem em larga escala: diretrizes para pesquisadores / Large-scale psychological assessments and learning assessments: guidelines for researchers / Evaluación psicológica y evaluación del aprendizaje a gran escala: directrices para investigadores

A avaliação psicológica (AP) e a avaliação educacional (AE) estão entre as contribuições mais importantes das ciências cognitivas e comportamentais para a sociedade atual, pois proporcionam importantes fontes de informações sobre os indivíduos e os grupos. O presente artigo objetivou apresentar diretrizes para os pesquisadores em relação a AP e a avaliação da aprendizagem em larga escala (AALEs). São discutidos os caminhos da AP em um mundo em crise sanitária devido a pandemia da Covid-19. Em termos das AALEs, são discutidos aspectos teóricos, metodológicos e analíticos que devem ser considerados pelos avaliadores e pesquisadores da área. Concluímos que a AP e AALE se relacionam na medida em que ambas cumprem a função social de identificar lacunas que merecem atenção, bem como aspectos funcionais que devem ser mantidos e incentivados. Outra importante característica é a exigência de constante aprimoramento técnico por parte dos avaliadores e pesquisadores. (AU)

Psychological assessment (PA) and educational assessment (EA) are among the most important contributions of cognitive and behavioral sciences to modern society. They provide important information about individuals and groups that are a part of the society. The aim of this article is to present guidelines for researchers regarding PA and large-scale learning assessments (LSLAs). The paths of PA in a world in health crisis due to the Covid-19 pandemic are discussed. In the context of LSLAs, we discuss theoretical, methodological and analytical aspects that must be considered by evaluators and researchers in the area. We conclude that PA and LSLAs are related to the extent that both fulfill the social function of identifying gaps that deserve attention, as well as functional aspects that must be maintained and encouraged. Another important characteristic is the requirement for constant technical improvement by both evaluators and researchers.(AU)

La evaluación psicológica (EP) y la evaluación educativa (EE) se encuentran entre las contribuciones más importantes de las ciencias cognitivas y del comportamiento hechas a la sociedad contemporánea, ya que brindan importantes fuentes de informaciones sobre los individuos y grupos que forman parte de ella. Este artículo tiene como objetivo presentar a los investigadores directrices sobre EP y la evaluación del aprendizaje a gran escala (EAGE). Se discuten los caminos de la EP en un mundo en crisis sanitaria por la pandemia del Covid-19. Con respecto a EAGE, se discuten aspectos metodológicos y analíticos que deben ser considerados por evaluadores e investigadores del área. Concluimos que la EP y la EAGE están relacionadas en la medida en que ambas cumplen la función social de identificar brechas que merecen atención, así como aspectos funcionales que deben ser mantenidos y fomentados. Otra característica fundamental es la exigencia de una mejora técnica constante, tanto por parte de los evaluadores, como de los investigadores.(AU)

Modeling social desirability in the Antisocial Self-Report (ASR-13) scores / Modelando a desejabilidade social na Escala de Auto-Relato de Comportamentos Anti-Sociais / Modelización de la deseabilidad social en los puntajes del Inventario Breve de Conductas Antisociales (ASR-13)

The Antisocial Self-Report (ASR-13) was developed to assess a general antisocial personality factor. However, because antisocial traits are socially aversive, the ASR-13 scores can be potentially contaminated by social desirability in high-stakes testing situations. In the present study, we performed an in-depth analysis of the ASR-13 to determine which items may be subject to socially desirable responding when used for data collection in prison settings. Participants were 324 college students, and 20 male prisoners. A Multiple Indicator Multiple Cause (MIMIC) model suggested three items were especially prone to eliciting socially desirable responding. We found evidence that prisoners likely attenuated their scores when rating items with content that is related to illegal behaviors. We discuss the implications of the findings, and how they help understand the latent processes that cause item responses to the ASR-13 inventory.(AU)

O Inventário Breve de Comportamentos Antissociais foi desenvolvido para avaliar um fator geral de personalidade antissocial. No entanto, como traços antissociais são socialmente aversivos, os escores do inventário podem acabar contaminados pela desejabilidade social em contextos de avaliação nos quais o indivíduo possui interesse em obter resultados favoráveis. No presente estudo, uma análise do ASR-13 foi realizada em relação a quais itens são suscetíveis às respostas socialmente desejáveis quando a coleta de dados é feita em ambientes prisionais. Os participantes foram 324 estudantes universitários e 20 homens privados de liberdade. O modelo Multiple Indicator Multiple Cause (MIMIC) sugeriu que três itens eram especialmente propensos a provocar respostas socialmente desejáveis. Evidências de que os participantes privados de liberdade atenuaram as suas pontuações em itens com conteúdo relacionado a comportamentos ilegais foram encontradas. Discutiu-se as implicações dos resultados e como ajudam a entender os processos latentes que causam respostas aos itens do ASR-13.(AU)

El Inventario Breve de Conductas Antisociales fue desarrollado para evaluar un factor general de personalidad antisocial. Sin embargo, como los rasgos antisociales son socialmente aversivos, los puntajes del inventario pueden verse contaminadas por la deseabilidad social en contextos de evaluación en los que el individuo está interesado en obtener resultados favorables. En el presente estudio, realizamos un análisis del ASR-13 en relación con qué ítems son susceptibles de respuestas socialmente deseables cuando la recolección de datos se realiza en entornos penitenciarios. Los participantes fueron 324 estudiantes universitarios y 20 hombres en situación de privación de libertad. El Modelo con Indicadores y Causas Múltiples (MIMIC) sugirió que tres ítems eras especialmente propensos a provocar respuestas socialmente deseables. Encontramos evidencias de que los participantes privados de libertad bajaron sus puntajes en ítems con contenido relacionado con conductas ilegales. Discutimos las implicaciones de los resultados y cómo ayudan a comprender los procesos latentes que provocan las respuestas a los ítems del ASR-13.(AU)

Teste de regulação de emoções: análise com a teoria de resposta ao item / Emotion regulation test: analysis with item response theory / Test de regulación de la emoción: análisis con teoría de respuesta al ítem

A regulação de emoções é uma habilidade relacionada à inteligência emocional que tem mostrado impactos importantes sob diversos aspectos da vida. Este trabalho teve o objetivo de analisar as pro-priedades psicométricas do Teste de Regulação de Emoções, com auxílio da Teoria de Resposta ao Item. O instrumento foi aplicado pela internet a 289 participantes, predominantemente jovens adultos, do sexo feminino e estudantes universitários. Os resultados informam sobre propriedades psicométricas do instrumento, que pode ser melhorado quanto à fidedignidade e no preenchimento de lacunas no contínuo de habilidades avaliadas pelo teste. Entretanto, foi adequado quanto ao equilíbrio entre os níveis de dificuldade dos itens e de habilidade dos respondentes, e proporcionou a compreensão dos aspectos que influenciam o aumento da dificuldade dos itens, com implicações clínicas e para a avalia-ção desse construto.

Emotional regulation is a skill related to emotional intelligence, which has shown important impacts on several aspects of life. This work aimed to analyze the psychometric properties of the Emotion Regulation Test based on the Item Response Theory. The instrument was applied over the internet to 289 participants, predominantly young adults, female and university students. The results inform about the instrument's psychometric properties, which can be improved in terms of reliability and in filling gaps in the skills continuum assessed by the test. However, it was adequate regarding the balance between the items' difficulty and the respondents' ability levels and provided information about aspects that influence the increase of the items' difficulty, which has clinical and assessment implications.

La regulación emocional es una habilidad relacionada con la inteligencia emocional, que ha mostrado importantes impactos en varios aspectos de la vida. Este trabajo tuvo como objetivo analizar las propiedades psicométricas de la Prueba de Regulación de la Emoción, con la ayuda de la Teoría de Respuesta al Ítem. El instrumento se aplicó vía internet a 289 participantes, predominantemente adultos jóvenes, mujeres y estudiantes universitarios. Los resultados informan sobre las propiedades psicométricas del instrumento, que pueden mejorarse en términos de confiabilidad y en llenar vacíos en el continuo de habilidades evaluadas por la prueba. Sin embargo, fue adecuado con respecto al equilibrio entre los niveles de dificultad de los ítemes y las habilidades de los encuestados y proporcionó una comprensión de los aspectos que influyen en el aumento de la dificultad de los ítemes, con implicaciones clínicas y para la evaluación de este constructo.

The Basic Empathy Scale: evidence of internal structure in the brazilian context / Escala de Empatia Básica: evidências de estrutura interna no contexto brasileiro / Escala Básica de Empatía: evidências de estructura interna en el contexto brasileño

This study aimed to investigate evidence for the internal structure of the 20 item Basic Empathy Scale (BES-20), and verify the parameters of each of its items. The participants totaled 300 subjects from the community sample who answered both the BES-20 and demographic questions. The results indicated a two-factor measure involving: affective empathy (α = .84 and ω =.84) and cognitive empathy (α =.84 and ω =.84). Analyses using Item Response Theory demonstrated that the items of the BES-20 properly discriminated between participants, requiring low levels of latent trait for agreement/checking-off responses in each category. In addition, we developed a 10 item (short-form) version (BES-10) which when compared to the full version yielded equivalent psychometric parameters and information scores. Overall, both the BES-20 and BES-10 were confirmed as qualified for psychometric use in future studies to measure empathy in Brazil. (AU)

Este estudo objetivou conhecer as evidências da estrutura interna da Escala de Empatia Básica (BES-20) e os parâmetros de seus itens. Contou-se com a participação de 300 sujeitos da população geral que responderam a BES, além de perguntas demográficas. Os resultados indicaram uma solução composta por dois fatores para a medida com os fatores de empatia afetiva (α = 0,84 e ω = 0,84) e empatia cognitiva (α = 0,84 e ω = 0,84). Análises via Teoria de Resposta ao Item demonstraram que os itens da BES-20 discriminam adequadamente os participantes e exigem baixa quantidade de traço latente para o endosso de suas categorias de resposta. Além disso, forneceu-se uma medida reduzida composta por 10 itens (BES-10) com parâmetros psicométricos e taxas de informação comparável à versão com 20 itens. Conclui-se que ambas as versões da BES reúnem evidências que corroboram sua qualidade psicométrica, podendo serem utilizadas em estudos futuros que objetivem mensurar a empatia no Brasil. (AU)

Este estudio tuvo como objetivo conocer las evidencias de la estructura interna de la Escala Básica de Empatía (EBE-20) y los parámetros de sus ítems. Participaron 300 personas de la población general que respondieron la EBE-20 y preguntas demográficas. Los resultados indicaron una solución de dos factores: empatía afectiva (α = .84 y ω = .84) y empatía cognitiva (α = .84 y ω = .84). Los análisis a través de la Teoría de Respuesta al Ítem demostraron que los ítems de la EBE-20 discriminan adecuadamente los participantes, y requieren una cantidad baja de rasgos latentes para la aprobación de sus categorías de respuesta. Además, se proporcionó una medida reducida que consta de 10 ítems (EBE-10) con parámetros psicométricos y tasas de información comparables a la versión con 20 ítems. Se concluye que ambas versiones de la EBE recogen evidencias que corroboran su calidad psicométrica y pueden ser utilizadas en futuros estudios que tengan como objetivo medir la empatía en Brasil. (AU)

Normatização da Bateria de Provas de Raciocínio (BPR-5) usando a Teoria de Resposta ao Item / Standardization of the Reasoning Tests Battery (BPR-5) using Item Response Theory / Estandarización de la Batería de Pruebas de Razonamiento (BPR-5) usando la teoría de respuesta al ítem

A Bateria de Provas de Raciocínio (BPR-5) é um instrumento bastante utilizado para avaliação da inteligência no Brasil, possuindo três formas: infantil (1º ao 6º ano do Ensino Fundamental), Forma A (7º ao 9º ano do Ensino Fundamental) e Forma B (Ensino Médio e Superior). Visando a possibilidade de comparar os resultados entre sujeitos que respondem a formas diferentes, o presente estudo objetivou: (a) calibrar os itens das três formas pelo modelo de Rasch, realizando a equalização por itens comuns de modo a obter uma escala equiparável para as três formas, (b) atualizar as normas expandindo a representatividade das amostras e produzindo-se normas para diferentes combinações de idade, escolaridade e sexo, (c) descrever padrões de desenvolvimento da inteligência a partir da escala, comum, produzida entre 6 e 52 anos. Dois estudos foram relatados, o primeiro sobre a calibração dos parâmetros segundo o modelo de Rasch indicando um bom ajuste ao modelo. O segundo estudo exemplificou a utilização de regressão múltipla para criação de normas para testes psicológicos, considerando as variáveis idade, escolaridade e sexo como preditoras dos escores na BPR-5. Essas três variáveis tiveram efeitos significativos explicando 8% (Raciocínio Abstrato), 13% (Raciocínio Verbal), 12% (Raciocínio Espacial), 8% (Raciocínio Numérico) e 22% (Raciocínio Mecânico).(AU)

The Reasoning Tests Battery (BPR-5) is widely used in Brazil for the assessment of intelligence. It has three different forms: children (1st to 6th grade of elementary school), Form A (7th to 9th grade of elementary school) and Form B (high school and higher education). This study describes the steps followed to create a common metric across the forms. It aimed to: (a) calibrate the items of the three forms using Rasch model, link items and equate subjects' scores across forms using the anchoring of common items method, (b) update the norms by expanding the representativeness of the samples by producing norms for different combinations of age, education and sex, and (c) describe the developmental patterns of the BPR-5 subtests across a wide age range, from 6 to 52 years. We present two studies, the first reporting the calibration of item and person parameters with the Rasch model and a good fit to the model. The second illustrated the use of multiple regression analysis to create norms for the psychological tests considering the variables age, education and gender as predictors of the BPR-5 scores. These three variables had significant effects explaining 8% (Abstract Reasoning), 13% (Verbal Reasoning), 12% (Spatial Reasoning), 8% (Numerical Reasoning) and 22% (Mechanical Reasoning) of the variance. (AU)

La Batería de Pruebas de Razonamiento (BPR-5) es un instrumento muy utilizado para la evaluación de la inteligencia en Brasil, disponiendo de tres formas: infantil (1° al 6° año de la Enseñanza Fundamental), Forma A (7° al 9° año de la Enseñanza Fundamental) y Forma B (Bachillerato y Educación Superior). Teniendo como finalidad la posibilidad de comparar los resultados entre sujetos que responden a diferentes versiones, el presente estudio tuvo como objetivo: (a) calibrar los ítems de las tres formas por el modelo de Rasch, realizando la igualación por ítems comunes a fin de obtener una escala equiparable para las tres formas, (b) actualizar las normas ampliando la representatividad de las muestras y produciendo normas para diferentes combinaciones de edad, escolarización y sexo, (c) describir patrones de desarrollo de la inteligencia a partir de la escala, común, producida entre los 6 y los 52 años. Dos estudios fueron reportados, el primer sobre la calibración de los parámetros de acuerdo con el modelo de Rasch, indicando un buen ajuste al modelo. El segundo estudio ejemplificó la utilización de regresión múltiple para crear normas para tests psicológicos, considerando las variables edad, educación y sexo como predictivos de los escores en el BPR-5. Esas tres variables tuvieron efectos significativos explicando 8% (Razonamiento Abstracto), 13% (Razonamiento Verbal), 12% (Razonamiento Espacial), 8% (Razonamiento Numérico), y 22% (Razonamiento Mecánico).(AU)

Oferta das boas práticas do parto em maternidades da Rede Cegonha segundo a Teoria de Resposta ao Item / Supply of best childbirth practices in maternity units of Rede Cegonha according to Item Response Theory

Resumo Este estudo objetivou elaborar uma escala interpretável para mensurar o nível de oferta das boas práticas no trabalho de parto e parto em maternidades da Rede Cegonha (RC) a partir da percepção dos trabalhadores. A escala foi composta por dezessete itens relacionados às boas práticas, obtidos a partir do instrumento utilizado na pesquisa "Avaliação da atenção ao parto e nascimento em maternidades da RC". O modelo logístico de três parâmetros da Teoria de Resposta ao Item foi utilizado para criação da escala e análise dos itens. A escala foi composta por três níveis âncoras. No primeiro nível âncora, tem-se maternidades que ofertavam adequadamente estratégias para o acolhimento e estimulando a gestante a deambular no trabalho de parto. As maternidades do segundo nível incluíram também a oferta adequada do direito a acompanhante de livre escolha da mulher, massagem, bola e diferentes posições de parto. Por fim, têm-se as maternidades do terceiro nível ofereciam também adequadamente banqueta de parto, bem como os itens já citados. Os achados deste estudo mostraram a contribuição de cada item na mensuração do nível de oferta das boas práticas de atenção ao trabalho de parto e parto e a construção de uma escala interpretativa para avaliação das maternidades da RC.

Abstract This study aimed to develop an intelligible scale to measure the level of supply of best practices in labor, childbirth and delivery in maternity units in the Rede Cegonha (RC) based on the workers' perception. The scale consisted of seventeen items related to best practices, based on the instrument used in the "Evaluation of care during delivery and birth in maternity hospitals in the RC" research The three-parameter logistic model of Item Response Theory was used to create the scale and analyze the items. The scale consisted of three levels. In the first level, there are maternity hospitals that adequately offered strategies for welcoming and encouraging the pregnant woman to circulate during labor. The second level maternity wards also included the adequate offer of the right to a companion of choice, massage, ball and different birth positions. Finally, the third level maternity hospitals also offered an adequate delivery stool, as well as the items already mentioned. The findings of this study showed the contribution of each item in measuring the level of supply of best practices in care for labor, childbirth and delivery and the construction of an intelligible scale to assess RC maternity hospitals.

Avances en el estudio de la continuidad del neuroticismo y su variante desadaptativa: aplicación de la teoría de respuesta al ítem / Advances in the Study of the Continuity of Neuroticism and its Maladaptive Variant: Application of the Item Response Theory

Resumen El Neuroticismo (N), a pesar de ser un rasgo de personalidad normal, se vincula con el padecimiento de diversas psicopatologias. Se estudió la continuidad entre el N y su variante desadaptativa, la Afectividad Negativa (AN), aplicando un modelo de la Teoría de Respuesta al Ítem (TRI) a dos escalas que miden estos constructos. Participaron 619 personas de población general (64.3 % mujeres), quienes respondieron un protocolo que incluyó 20 ítems de N del International Personality Item Pool (IPIP-NEO) y 23 ítems de AN del Personality Inventory for DSM-5 (PID-5). Inicialmenete se realizó una depuración progresiva de los ítems de N y AN a partir de criterios psicométricos del Modelo de Respuesta Graduada. Luego se calibraron conjuntamente los 22 ítems retenidos aunque se eliminaron 6 ítems por mostrar dependencia local y problemas de ajuste. Se aportaron evidencias de la continuidad postulada entre N y AN. Sin embargo, se encontró un marcado solapamiento en la localización de los ítems procedentes de ambas escalas en el continuo del rasgo que conforman N y AN.

Abstract Neuroticism (N), despite being a normal personality trait, is linked to various psychopathologies. The continuity between N and its maladaptive variant, Negative Affectivity (NA), was studied by applying a model of the Item Response Theory (IRT) to two scales that measure these constructs. A total of 619 participants from the general population (64.3% women) answered a protocol that included 20 items of N from the International Personality Item Pool (IPIP-NEO) and 23 items of NA from the Personality Inventory for DSM-5 (PID-5). First, progressive refinement of the N and NA items was carried out based on psychometric criteria from the Graded Response Model. Then, the 22 items retained were calibrated together, although 6 items were eliminated for showing local dependence and adjustment problems. Evidence of the postulated continuity between N and NA was provided. However, a marked overlap was found in the location of the items from both scales in the trait continuum formed by N and AN.

Estructura Interna del Inventario Peruano de Mindfulness y Ecuanimidad / Internal structure of the Mindfulness and Equanimity Peruvian Inventory

Resumen El propósito del presente estudio es examinar la validez de constructo y consistencia interna del Inventario Peruano de Mindfulness y Ecuanimidad. Basado en el análisis factorial y la Teoria de Respuesta al Item (Modelo de Crédito Parcial y el Método de Escalabilidad de Mokken), se examinó la magnitud de los parâmetros y se estimò la varianza de cada uno de los items para contribuir en el constructo general de mindfulness. La muestra del estudio está compuesta por 602 adultos, estudiantes de tres instituciones acadêmicas de educación superior de Lima, Chiclayo y Chimbote en el Perú. Los resultados de estos análisis indican una estructura unidimensional del instrumento, en función a ocho items representados por los atributos de atención, consciencia, aceptación, juicio de valor, y ecuanimidad. Los indicadores de ajuste del modelo de factores oblicuos para los items seleccionados fueron satisfactorios: CEI = .982, RMSEA = .043 (IC90% = .029, .056), SRMR = .048, SB--2 (gl: 35) = 73.415 (p > 0.05).

Abstract The main purpose of this study is to report the construct validity and internal consistency of the Peruvian Inventory of Mindfulness and Equanimity. Based on the factor analysis and the Item response Theory (the Partial Credit Model and the Mokken Scale Analysis), the parameters magnitude was examined, and we estimated the variance of each item of the instrument that contribute to the general construct of mindfulness. The analyses were carried out on a sample of 602 adults, students from three educational institutions at the university level in the cities of Lima, Chiclayo, and Chimbote in Peru. The results of all the analyses performed on this peruvian sample suggest a unidimensional structure of this inventory, based on the eight items selected that include the abilities of attention, consciousness, acceptance, judgment, and equanimity. The goodness of fit index and adjusted goodness of fit index for the oblique factors were satisfactory: CEI = .982, RMSEA = .043 (lC90% = .029, .056), SRMR = .048, SB- -2 (gl: 35) = 73.415 (p > 0.05).

Escala de Bienestar Subjetivo, versión corta (EBS-8): Revalidación, invarianza de medición y teoría de respuesta al ítem / Subjective Well-Being Scale, short version (EBS-8): Revalidation, measurement invariance and Item Response Theory

Resumen La Escala de Bienestar Subjetivo (EBS-20) y su versión corta (EBS-8) fueron desarrolladas y validadas para medir en población hispanohablante la satisfacción con la vida y el afecto positivo. El objetivo del presente estudio fue obtener evidencias adicionales de validez para la EBS-8. Para ello, se aplicó la escala en tres estudios sucesivos a un total de 2259 mexicanos de 12 a 81 años. Los resultados del primer estudio permitieron confirmar la estructura unifactorial (CMIN/DF = 2.336; CFI = .996; RMSEA = .047) y la adecuada confiabilidad de la escala (a = .958, co = .957); en el segundo se probó su invarianza de medición por sexo, grupo social y edad (A%2 p > .05, ACFI < .004, ARMSEA < .014); y en el tercer estudio se encontró, mediante la calibración de sus reactivos bajo la TRI, que la escala estima satisfactoriamente el constructo evaluado (a > 1.69; P1 entre -2.78 y -2.35). A partir de los índices psicométricos obtenidos, se concluye que la EBS-8 es un excelente instrumento breve construido en español para evaluar el bienestar subjetivo en adolescentes, jóvenes, adultos y adultos mayores.

Abstract The Subjective Well-Being Scale (EBS-20) and its short version (EBS-8) were developed and validated to measure life satisfaction and positive affect in a Spanish-speaking population. The aim of the present study was to obtain additional evidence of validity for the EBS-8. To this end, the scale was applied in three successive studies to a total of 2259 Mexicans aged 12 to 81 years. The results of the first study allowed us to confirm its unifactorial structure (CMIN/DF = 2.336; CFI = .996; RMSEA = .047) and its adequate reliability (a = .958, co = .957); in the second its measurement invariance by sex, social group and age was tested (A%2 p >. 05, ACFI < .004, ARMSEA < .014); and in the third study it was found, by calibrating its items under IRT, that the scale satisfactorily estimates the construct assessed (a > 1.69; b1 between -2.78 and -2.35). From the psychometric indices obtained, it is concluded that the EBS-8 is an excellent brief instrument constructed in Spanish to assess subjective well-being in adolescents, young people, adults and older adults.

Reliability and validity of the solitude behavior scale for short version / 中华行为医学与脑科学杂志

Objective:To develop a suitable solitude behavior scale for short version(SBS-S).Methods:A total of 2 484 valid data were collected from college students in Tianjin city and Shandong province.Based on the exploratory structural equation model(ESEM) and generalized partial credit model(GPCM) of item response theory, the SBS-S was developed.A total of 100 college students in Guizhou province were tested twice at intervals of two months to calculate the test-retest reliability of the SBS-S.R language Mplus 8.0 and SPSS 24.0 software were used for the data analysis.Results:According to the results of ESEM and GPCM model, 18 items were deleted. After deleting the above questions, 16 items (four items under each dimension) and four dimensions(positive solitude, eccentricity, social avoidance and loneliness) were retained. The coefficient of Cronbach's α was above 0.75. The results of confirmatory factor analysis showed that the structure model of the SBS-S was fitting well, and the index was ( χ2/ df=4.74, TLI=0.92, CFI= 0.95, SRMR =0.05, RMSEA=0.06). According to the results of SPSS, the test-retest reliability was above 0.60.Big-five persondlity, social support and self-esteem were regarded as criterion related validity. The results showed that positive solitude had positive correlations with extraversion, conscientiousness, agreeableness, openness and self-esteem( r=0.07, 0.25, 0.15, 0.26, 0.09, all P<0.05). Eccentricity and social avoidance had negative correlations with extraversion, conscientiousness, agreeableness, social support and self-esteem( r=-0.25, -0.22, -0.45, -0.16, -0.36, all P<0.05; r=-0.26, -0.09, -0.06, -0.18, -0.36, all P<0.05), and had positive correlations with neuroticism( r=0.25, 0.32, both P<0.05). Loneliness had negative relation with extraversion, conscientiousness, agreeableness and self-esteem( r=-0.08, -0.11, -0.08, -0.33, all P<0.05), and had positive correlations with neuroticism( r=0.33, P<0.05). Conclusion:The SBS-S has good psychometric characteristics and can be used to evaluate the solitude behavior of individuals.

Applicability assessment and application of the general self-efficacy scale among medical postgraduates / 中华医学教育探索杂志

Objective:To assess the reliability, constructive validity and item characteristics of the general self-efficacy scale (GSES) among Chinese medical postgraduates using classical test theory and item response theory.Methods:A questionnaire survey was conducted among 1 021 medical postgraduates from 6 comprehensive level Ⅲ A hospitals in Beijing. Demographic characteristics and general self-efficacy were investigated. SPSS 24.0 software was used for statistical analysis. Internal consistency of the GSES was evaluated using Cronbach’s α coefficient and intraclass correlation coefficient. Factor analyses were implemented to test the structure of the scale. An item response theory (IRT) framework with a graded response model was performed to estimate the parameters of each item. Results:The overall Cronbach’s α coefficient of the GSES was 0.92. Parallel analysis and confirmatory factor analysis supported the unidimensional structure of the GSES. The discrimination parameter of the 10 items ranged from 1.82 to 3.65, and the difficulty parameter ranged from -3.51 to 1.66, with a monotonically increasing trend. The maximum test information of the scale among medical postgraduates was 19.16. Conclusion:The GSES has good reliability, validity and measurement precision, showing a good applicability in the survey of medical postgraduates. However, the difficulty of specific items is relatively low, and the scale may be further optimized and improved.

Parâmetros de dificuldade e discriminação das tarefas motoras do instrumento KTK: uma análise a partir da teoria de resposta ao item / Difficulty and discrimination parameters of the KTK instrument motor tasks: an analysis from item response theory

RESUMO Nas últimas décadas o uso da Teoria de Resposta ao Item (TRI) tem sido implementada devido à complexidade dos cálculos estatísticos que permite analisar com profundidade testes educacionais, questionários e listas de itens aplicados em diferentes áreas como a psicometria, ranking esportivo e pedagogia. A partir dessa premissa este estudo teve como objetivo verificar a adequabilidade das tarefas motoras do KTK analisando o grau de dificuldade e parâmetro de discriminação de cada tarefa motora. Participaram do estudo 385 crianças de 5 a 14 anos. O instrumento avaliado foi o KTK (Körperkoordinationstest für Kinder), composto por quatro tarefas motoras: trave de equilíbrio, saltos monopedais, saltos laterais e transposição de plataformas. As análises foram conduzidas a partir dos dados brutos adquiridos em cada tarefa motora. A fim de verificar a estrutura fatorial da matriz teórica subjacente ao teste, foi realizada uma análise fatorial exploratória seguida da análise fatorial confirmatória. Os parâmetros de dificuldade e discriminação de cada tarefa motora foram analisados a partir do modelo de resposta gradual, fundamentado na teoria de resposta ao item (TRI). Os resultados corroboram com a estrutura fatorial sugerida na versão original do KTK, apresentando apenas um fator, chamado de coordenação motora. Os indicadores da Análise Fatorial Confirmatória (AFC) foram aceitáveis, indicando boa qualidade do modelo ajustado para a amostra. Conclui-se que a análise de TRI evidenciou diferenças nos parâmetros de dificuldade e de discriminação entre as tarefas motoras do KTK, demonstrando a importância de considerar uma ponderação na criação de tabelas normativas de avaliações motoras.

ABSTRACT In the last decades, the use of Item Response Theory (IRT) has been implemented due to the complexity of statistical calculations that allows for in-depth analysis of educational tests, questionnaires and lists of items applied in different areas such as psychometry, sports ranking and pedagogy. Based on this premise, this study aimed to verify the suitability of the KTK motor tasks analyzing the degree of difficulty and discrimination parameters of each motor task. A total of 385 children aged 5 to 14 years participated in the study. The instrument evaluated was the KTK (Körperkoordinationstest für Kinder), consisting of four motor tasks: balance beam, single-pedal jumps, side jumps and platform transposition. Analyzes were conducted from the raw data acquired in each motor task. In order to verify the factor structure of the theoretical matrix underlying the test, an exploratory factor analysis was performed, followed by a confirmatory factor analysis. The difficulty and discrimination parameters of each motor task were analyzed using the gradual response model, based on the Item Response Theory (IRT). The results corroborate the factor structure suggested in the original version of the KTK, presenting only one factor, called motor coordination. The AFC indicators were acceptable, indicating good quality of the model adjusted for the sample. It is concluded that the IRT analysis evidenced differences in the parameters of difficulty and discrimination between the KTK motor tasks, demonstrating the importance of considering a weighting in the creation of normative tables of motor assessments.

Theoretical and Practical Foundations of Mokken Scale Analysis in Psychology / Fundamentos Teóricos e Práticos da Análise de Escala de Mokken em Psicologia / Fundamentos Teóricos y Prácticos del Análisis de la Escala de Mokken en Psicología

Abstract Item Response Theory represents one of the major advances in the field of developing valid and reliable measures in psychology. Among the main models used in this perspective are the Rasch model and the logistic models. These parametric models, however, are not suitable for all applications in psychology, since a substantial number of databases in psychology do not satisfy the assumptions of these models: unidimensionality; latent monotonicity; local independence; and, for some models, non-intersecting functions. Given this framework, the objective of this study was to present the theoretical and practical foundations of Mokken Scale Analysis (MSA). We present some historical issues involving the development of MSA, in addition to the main characteristics and assumptions of the two models used in this perspective. After exemplifying a MSA application, limitations and final considerations are presented, supporting the decision-making process for researchers who come to use MSA.

Resumo A Teoria de Resposta ao Item representa um dos principais avanços para a construção de medidas válidas e confiáveis em psicologia. Entre os principais modelos utilizados nessa perspectiva estão o modelo de Rasch e os modelos logísticos. Esses modelos paramétricos, no entanto, não podem ser utilizados em todas as aplicações em psicologia, uma vez que um número substancial dos bancos de dados em psicologia não satisfaz os pressupostos desses modelos: unidimensionalidade; monotonicidade latente; independência local; e, para alguns modelos, não-interseção de funções. Dessa forma, o objetivo deste estudo foi apresentar os fundamentos teóricos e práticos da Análise de Escala de Mokken (AEM). São apresentadas questões históricas envolvendo o desenvolvimento da AEM, além das principais características e pressupostos dos dois modelos usados nessa perspectiva. Após exemplificação de uma AEM, limitações e considerações finais são apresentadas, apoiando o processo de tomada decisão para pesquisadores que venham a usar a AEM.

Resumen La Teoría de Respuesta al Ítem representa uno de los mayores avances en el campo del desarrollo de medidas válidas en psicología. Entre los principales modelos utilizados en esta perspectiva se encuentran los modelos logísticos. Estos modelos no son adecuados para todas las aplicaciones en psicología, ya que algunas bases de datos en psicología no satisfacen las suposiciones de estos modelos: unidimensionalidad; monotonicidad latente; e independencia local; y, para algunos modelos, funciones que no se interceptan. Teniendo en cuenta este marco, el objetivo de este estudio fue presentar los fundamentos teóricos y prácticos del Análisis de la Escala de Mokken (AEM). Presentamos algunas cuestiones históricas relacionadas con el desarrollo de AEM, además de las principales características y suposiciones de los dos modelos utilizados en esta perspectiva. Después de ejemplificar un AEM, se presentan las limitaciones y consideraciones finales, apoyando o procesando la tomada de decisión para investigadores que van a usar el AEM.

Propiedades psicométricas de una escala de Depresión basada en el Modelo de los Cinco Factores / Psychometric properties of a Depression scale based on the Five Factor Model

Resumen Se presenta el proceso de construcción de una escala para medir la faceta De-presión según el Modelo de los Cinco Factores. Se realizó una revisión de las definiciones teóricas y operacionales de autores relevantes de este modelo. Luego se elaboraron 15 ítems iniciales, 3 de los cuales fueron eliminados por jueces expertos. Los ítems conservados se administraron a 1222 adultos de población general residentes en el área metropolitana de Buenos Aires, Argentina (50.8 % mujeres, edad media = 33.2 años y DE = 11.8 años). Se seleccionó aleatoriamente un 35% de casos para depurar el instrumento con un análisis factorial exploratorio. El 65% restante se utilizó para corroborar la estructura interna con un análisis factorial confirmatorio y para ajustar el Modelo de Respuesta Graduada de la Teoria de Respuesta al Ítem. Los resultados muestran que los 10 ítems de la versión definitiva conforman una estructura unidimensional con adecuada consistencia interna. Se aportan evidencias de validez concurrente con EPQ-RA y SCL-90-R. La Función de Información revela que la escala mide con precisión elevada y constante en un rango extenso del rasgo. Se concluye que la escala permite valorar de manera satisfactoria las diferencias individuales en la tendencia a experimentar afectos depresivos.

Abstract The process of constructing a scale to measure the Depression facet, according to the Five Factors Model, is presented. A review of the theoretical and operational definitions of relevant authors of this model was carried out. Then, 15 initial items were elaborated, 3 of which were eliminated by expert judges. The retained items were administered to 1222 adults of the general population residing in the Buenos Aires Metropolitan Area, Argentina (50.8% women, mean age = 33.2 years and SD = 11.8 years). A random selection of 35% of cases was made to reduce the instrument with an Exploratory Factor Analysis. The remaining 65% was used to corroborate the internal structure with a Confirmatory Factor Analysis, and to fit the Graded Response Model of the Item Response Theory. The results show that the 10 items of the final version form a one-dimensional structure with adequate internal consistency. Evidence of concurrent validity is provided with EPQ-RA and SCL-90-R. The Test Information Function reveals that the scale measures with constant high reliability over a wide range of the trait. It is concluded that the scale allows a satisfactory assessment of individual differences in the tendency to experience depressive effects.